CLEAR: Continuous Latent Adapter Routing for Utility-Preserving LLM Safety Alignment
CLEAR：连续潜在适配器路由实现效用保留的 LLM 安全对齐
🧭 LLM 安全对齐 · 条件 LoRA 路由
Siebel School of Computing and Data Science, University of Illinois at Urbana-Champaign · Computer Science, Stanford University
用轻量隐状态门控连续控制安全 LoRA 激活，在降低有害输出的同时保留基座效用
📌 工作参考价值（4 点）
- 将安全/合规策略做成可插拔的 LoRA+门控旁路，而不是全局 SFT：线上推荐文案、Agent 回复生成时，冻结基座保留推荐/推理能力，仅对命中风险 prompt 激活安全 adapter，避免整体性能回退。
- 连续门控比离散 router 更灵活：输出 α∈[0,1] 控制 LoRA 强度，可在线上按场景调整阈值，实现“轻度改写/强干预”的分级风控，适合电商内容审核和广告合规。
- 训练时只用 hidden state 作为 gate 输入，仅训练 gate 和安全 LoRA，成本低、可回滚；可迁移到多策略组合：为不同地域/品牌安全规范各训练一个小 adapter，由 gate 混合或路由。
- 评估安全对齐时不能只看 ASR，要同时看推理/推荐指标（类似 GSM8K）；条件化训练明显优于全局 SFT/LoRA，可作为安全与效用 trade-off 的强 baseline。